How Many Test Users in a Usability Study?可用性測試的最佳使用者人數

在定性可用性測試中,測試 5 名使用者幾乎可以發現大部分的可用性問題,達到高效的成本收益比。然而,某些場景可能需要更少或更多使用者。

為什麼選擇 5 個使用者?

高效的發現率: 5 名使用者即可揭示絕大多數的可用性問題,更多的使用者帶來的新增問題發現會迅速遞減。

成本收益比最優: 隨著測試使用者數量增加,成本上升,但收益增加趨於平緩。因此,小規模測試是最佳選擇。

適用範圍:

不論是網站、企業內網、PC 應用程式還是移動應用,5 人測試原則普遍適用。

規則的例外情況

1. 定量研究

目標: 獲取統計顯著性結果。

建議使用者數: 至少 20 人,置信區間要求嚴格時需更多。

2. 卡片分類測試

目標: 設計或驗證資訊架構。

建議使用者數: 每個使用者組至少 15 人。

3. 眼動追蹤

目標: 生成穩定的熱圖。

建議使用者數: 39 人。

結論:儘管某些場景需要更大樣本,但絕大多數研究應該以定性研究為主,專注於洞察而非統計資料。

ROI:為什麼更多使用者不總是更好?

如果有額外預算,優先選擇多輪小規模測試,而非增加每輪測試的使用者數。

關於增加使用者數的常見誤解

誤解 1:網站使用者眾多,樣本應該大

事實: 樣本量的統計方差只與樣本數量相關,與總體規模無關。

誤解 2:功能繁多,需要測試更多使用者

事實: 多功能的網站應分解為多個小型測試,每次測試只關注一部分功能。

誤解 3:不同目標群體需要更多使用者

事實: 不同目標群體的確可能需要更多使用者,但每組目標使用者通常只需測試 3–5 人即可揭示主要問題。

誤解 4:高價值專案需要消除所有問題

事實: 高預算專案可以支援更多迭代,而不是透過一次大規模測試解決所有問題。迭代設計流程的多輪測試最終能實現更高質量和 ROI。

推薦使用者數的實際應用

1. 絕大多數場景:5 人測試

優點: 快速揭示大部分問題,成本低,效率高。

適用範圍: 定性研究和功能性驗證。

2. 特殊場景:更多使用者

多目標群體: 針對醫生和患者等完全不同的使用者組,每組 3–5 人。

高預算高價值專案: 如果業務收益巨大,可支援更多使用者以提升可信度。

3. 小型敏捷專案:2–3 人測試

適用範圍: 開發週期短、測試成本極低的敏捷設計流程。

優點: 多次小型測試累積更多長期收益。

案例資料:83 項使用者測試的研究結果

資料顯示:測試使用者數與發現問題數量的相關性很小。

原因:

  1. 部分客戶要求更多使用者以增加內部可信度。
  1. 針對多目標使用者的設計專案需要額外樣本。
  1. 高預算諮詢專案傾向於增加使用者人數。

“5 個使用者”是大多數測試的黃金標準:

例外情況:

透過靈活應用這些原則,設計團隊可以在有限資源下最大化使用者研究的價值。